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(54) Verfahren zur Darsteilung des Kiefers 

(57) Die Erfindung betrifft ein Verfahren zur Darstei- 
lung des Kiefers (1 , 2) einer Person und eines Modells 
davon. Das Verfahren besteht aus folgenden vorberei- 
tenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebestim- 
mung. die Markierungspunkte (4) aufweist, in die 
Mundhdhle der Person; 

Erstellen mindestens einer Aufnahme des Kiefers 
(1, 2) der Person mit einem bildgebenden Verfah- 
ren, wie etwa R6ntgen, Tomographic NMR oder 
dgl., wobei die Markierungen mit aufgenommen 
werden, und Speicherung der Aufnahme als Daten- 
satz; 

Identifikation der Markierungspunkte (4); 

H erstellen eines Abdruckes des Kiefers (1, 
2) und Erzeugen eines Modells des Kiefers (1, 2). 

Zur Darsteilung werden folgende Schritte durchgefuhrt: 

Anbringen eines weiteren 3D-Sensors auf der 
AuBenseite des betreffenden Kiefers (1, 2); 
Neuerliches Einfuhren der Vorrichtung (3) zur 
Lagebestimmung, falls diese inzwischen entnom- 
men worden ist, in die MundhGhle in gleicher Lage 
wie bei der Erstellung der Aufnahme, wobei die Vor- 
richtung (3) mit einem 3D-Sensor ausgestattet ist; 
Bestimmen der lagemaBigen Beziehung zwischen 
dem 3D-Sensor der Vorrichtung (3) und dem 3D- 
Sensor auf der AuBenseite des Kiefers (1.2): 
Entfernen der Vorrichtung (3) zur Lagebestimmung; 
Anbringen eines weiteren 3D-Sensors auf der 
AuBenseite des Modells des Kiefers (1 , 2); 
Einfuhren der Vorrichtung (3) zur Lagebestimmung 
in das Modell des Kiefers (1 , 2) in gleicher Lage wie 
bei der Erstellung der Aufnahme, wobei die Vorrich- 
tung (3) mit einem 3D-Sensor ausgestattet ist; 


Bestimmen der lagemSBigen Beziehung zwischen 
dem 3D-Sensor der Vorrichtung (3) und dem 3D- 
Sensor auf der AuBenseite des Modells des Kiefers 
(1.2); 

Entfernen der Vorrichtung (3) zur Lagebestimmung; 
Erzeugen einer Uberlagerung eines optischen Bil- 
des des Kiefers (1 , 2) mit dem Datensatz in lage- 
richtiger Zuordnung oder alternativ dazu Erzeugen 
einer Uberlagerung eines optischen Bildes des 
Modells des Kiefers (1, 2) mit dem Datensatz in 
lagerichtiger Zuordnung. Weiters betrifft die Erfin- 
dung eine Vorrichtung (3) zur Lagebestimmung. 
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B schreibung 

Die Eriindung betriffi ein Verfahren zur Darstellung 
des Kiefers einer Person und/oder eines Modells davon. 

Bei der Herstellung von zahnarztlichen Impiantaten 
ist eine genaue Planung des operativen Eingriffes erfor- 
derlich. Dazu stehen verschiedene MaBnahmen zur 
Verfugung. In der Regel wird ein Abdruckdes betreffen- 
den Kiefers des Patienten hergestellt, woraus wiederum 
ein Modell des Kiefers gewonnen werden kann. Ande- 
rerseits sind verschiedene bildgebende Verfahren dazu 
geeignet, dem behandelnden Arzt AufschluB uber die 
jeweilige Situation zu verschaffen. Es kann sich dabei 
um gewbhnliche Rontgenbilder handeln, urn Tomogra- 
phien oder um NMR's (Kernspintomographie). Unbe- 
friedigend dabei bleibt jedoch. daB das Modell 
einerseits und die Darstellung aus dem bildgebenden 
Verfahren andererseits erst durch den Betrachter in 
Ubereinstimmung gebracht werden mussen. Noch 
schwieriger ist die Aufgabe, die reale Situation bei der 
Operation seibst mit dem Modell bzw. mit der zuvor 
erstellten Darstellung in Ubereinstimmung bringen zu 
mussen. 

Aus der EPA 488 987 des Anmelders ist ein Verfah- 
ren zur Darstellung beweglicher Kdrper bekannt, bei 25 
dem eine optische Darstellung des K6rpers und ein 
dem Kerper zugeordnetes Datenfeld gleichzeitig oder 
alternativ aus derselben Perspektive und im selben 
MaBstab in Echtzeit dargestellt werden. Ein solches 
Verfahren ist grundsatzlich dazu geeignet, die oben so 
beschriebene Problematik zu losen. Es wird etwa auf 
einem Monitor ein optisches Bild des betreffenden Kie- 
fers angezeigt und gleichzeitig wird der zugehdrige 
Datensatz, das ist das Ergebnis des bildgebenden Ver- 
fahrens, angezeigt. An den betreffenden Korperteilen 35 
ist dabei ein Lagesensor anzubringen, der gewahrlei- 
stet. daB sich der Datensatz entsprechend einer allfSHi- 
gen Bewegung des K6rperteils, z.B. des Unterkiefers im 
vorliegenden Fall, verschiebt. Voraussetzung fur dieses 
Verfahren ist jedoch eine anfangliche Einstellung des 40 
Systems, bei der charakteristische Punkte des Daten- 
satzes identifiziert werden und mit den entsprechenden 
charakteristischen Punkten in der optischen Darstellung 
in Ubereinstimmung gebracht werden. Gerade bei der 
Anwendung eines solchen Verfahrens auf das mensch- 45 
liche Kiefer stellen sich hierbei jedoch groBe Probleme. 
da die erforderlichen charakteristischen Punkte nicht in 
ausreichender Zahl vorhanden sind. Dies trifft inbeson- 
ders dann zu. wenn es sich um einen zahnlosen Kiefer 
handelt. AuBerdem macht die benbtigte Genauigkeit im so 
Bereich des Kiefers eine solche Einstellung auch bei 
Vorliegen von ZShnen problematisch. 

Es sind weiters sogenannte Artikulatoren zur 
Bestimmung der Lage des Unterkiefers bekannt. Damit 
kann beispielsweise die Lage der virtuellen LSngsachse ss 
des Unterkiefers bestimmt werden. Solche Artikulato- 
ren sind jedoch nicht dazu geeignet. das oben beschrie- 
bene Problem zu Ibsen, da die Mundhfihle beim Eingriff 
seibst frei zug&nglich sein muB. 


Eine weiterhin mogliche Anbringung von Markie- 
rungspunkten auf der Haut an der AuBenseite des Kie- 
fers ist nicht durchfuhrbar, da die Patienten wahrend 
des Eingriffs normalerweise narkotisiert werden. Dazu 
werden sie durch die Nase intubiert, wodurch sich eine 
vdllige Verspannung der Gesichtsmuskulatur ergibt. 
was zu einer Verschiebung der Markierungspunkte 
fuhrt. Dies macht ein Heranziehen dieser Punkte zur 
Lagebestimmung unmoglich. Ein Befestigung eines 
Markierungskorpers durch die Haut hindurch bereits bei 
der Aufnahme vorzunehmen. ist wegen der damit ver- 
bundenen Belastung fur den Patienten im allgemeinen 
nicht magiich. 

Eine Aufgabe der Erfindung ist es, diese Nachteile 
zu vermeiden und ein Verfahren zu schaffen, das eine 
sorgf&ltige Planung eines operativen Eingriffes im 
Bereich der Kiefer anhand eines Modells ermSglicht, 
wobei die Darstellungen aus bildgebenden Verfahren in 
anschaulicher Weise einbezogen werden konnen Ein 
weitere Aufgabe der Erfindung ist es, wfihrend eines 
operativen Eingriffes seibst eine Kontrolle des jeweils 
erreichten Zustandes zu ermOglichen, indem eine opti- 
sche Darstellung des Operationsbereiches zur Verfu- 
gung gestellt wird. die lagerichtig mit dem Ergebnis des 
bildgebenden Verfahrens uberiagert ist. 

ErfindungsgemaB wird dies in einem ersten Aspekt 
der Erfindung durch die Ausfuhrung folgender Schritte 
erreicht: 

1. vorbereitende Schritte: diese konnen zu einem 
beliebigen Zeitpunkt vor der eigentlichen Darstel- 
lung durchgefuhrt werden, wobei lediglich gefordert 
werden muB, daB sich der Kiefer zwischen der 
Durchfuhrung dieser Schritte und der Darstellung 
nicht verandert, etwa durch einen zahn&rztlichen 
Eingriff. 

Einfuhren einer Vorrichtung zur Lagebestim- 
mung, die Markierungspunkte aufweist, in die 
MundhOhle der Person; wesentlich an der Vor- 
richtung ist. daB sie eine eindeutig und genau 
reproduzierbare Stellung in der Mundhehle ein- 
nimmt. Die Markierungspunkte sollen in dem 
jeweils verwendeten bildgebenden Verfahren 
einen guten Kontrast ergeben und somit ieicht 
identifizierbar sein. Es kann sich im Fall von 
ROntgenaufnahmen etwa um Bleikugelchen 
handeln. die fest in Kunststoffmaterial einge- 
gossen sind. Als Markierungspunkte kOnnen 
auch die Ecken einer in der Vorrichtung einge- 
bauten Drahtstruktur o. dgl. dienen. Der in der 
Folge beschriebene Lagesensor seibst ist zu 
diesem Zeitpunkt nicht notwendigerweise in 
der Vorrichtung enthalten oder an ihr ange- 
bracht. Wesentlich ist jedoch, daB dieser Lage- 
sensor in der Folge lagemaBig eindeutig mit 
der Vorrichtung verbindbar ist. 
Erstellen mindestens einer Aufnahme des Kie- 
fers der Person mit einem bildgebenden Ver- 
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fahren, wie etwa RGntgen, Tomographie, NMR 
oder dgL, wobei die Markierungen mit aufge- 
nommen werden, und Speicherung der Auf- 
nahrne als Datensatz; diese sogenannte 
Digitalisierung ist eine Voraussetzung fur die 5 
spatere Bearbeitung der Auf nahme. 
Identifikation der Markierungspunkte; diese 
kann von Hand durchgefuhrt werden, etwa 
indem ein Markierungspunkt nach dem ande- 
ren auf einem Bildschirm mit dem Cursor auf- 10 
gesucht wird und dadurch identrfiziert wird. 
Dies bedeutet, daft die Koordinaten der Mar- 
kierungspunkte im Koordinatensystem der Auf- 
nahme festgestellt werden. Es ist jedoch auch 
durchaus mOglich, ein Mustererkennungsver- 15 
fahren zur Identifikation zu verwenden. 

2. Schritte zur Durchfuhrung der eigentlichen Dar- 
stellung: diese Schritte werden anlaftlich einer 
Untersuchung der Person oder wahrend eines Ein- 20 
griffs durchgefuhrt. 

Anbringen eines 3D-Sensors auf der AuBen- 
seite des betreffenden Kiefers; dies erfolgt bei- 
spielsweise dadurch, daft die Halterung fur den 25 
3D-Sensor durch die Haut im Bereich des 
Kinns der Person eingeschraubt wird, wenn die 
Darstellung des Unterkiefers erfolgen soli. Es 
ist selbstverstandlich auch m&glich, sowohl 
Unterkiefer als auch Oberkiefer fur die Darstel- 
lung vorzubereiten, indem zwei Sensoren ver- 
wendet werden. 

Neuerliches Einfuhren der Vorrichtung zur 
Lagebestimmung, falls diese inzwischen ent- 
nommen worden ist, in die MundhShie in glei- 
cher Lage wie bet der Erstellung der 
Aufnahme, wobei die Vorrichtung mit einem 
3D-Sensor ausgestattet ist; Es ist im Prinzip 
mOglich, daft die Aufnahme unmittelbar vor der 
Darstellung hergestellt wird. In diesem Fall 
kann sich die Vorrichtung zur Lagebestimmung 
noch in der MundhGhle befinden. Im allgemei- 
nen wird jedoch in diesem Schritt die Vorrich- 
tung neu eingesetzt, wobei darauf zu achten 
ist, daft exakt die gleiche Lage in Bezug auf 45 
das Kiefer wie bei der Aufnahme erreicht wird. 
Nunmehr muft der 3D-Sensor an der Vorrich- 
tung angebracht sein oder in ihr eingebaut 
sein. Wesentlich ist, daft die Lage dieses Sen- 
sors in Bezug auf die Markierungen eindeutig so 
ist und genau bekannt ist. 
Bestimmen der lagemaftigen Beziehung zwi- 
schen dem 3D-Sensor der Vorrichtung und 
dem 3D-Sensor auf der Auftenseite des Kie- 
fers; dies erfolgt dadurch, daft die raumliche ss 
Lage der beiden Sensoren gleichzeitig oder 
nahezu gleichzeitig bestimmt wird. 


Entfernen der Vorrichtung zur Lagebestim- 
mung; dadurch wird der freie Zugang zur 
Mundhohle hergestellt. 

Erzeugen einer Uberlagerung eines optischen 
Bildes des Kiefers mit dem Datensatz in lage- 
richtiger Zuordnung. Durch den Sensor auf der 
Auftenseite des Kiefers ist die aktuelle Lage 
des Kiefers stets bekannt. Durch die Durchfuh- 
rung einer Reihe von Koordinatentransforma- 
tionen gelingt es, den Datensatz so zu 
positionieren, daft die Strukturen des Daten- 
satz es mit den entsprechenden Strukturen des 
optischen Bildes auch bei einer raumlichen 
Bewegung des Kiefers stets in Ubereinstim- 
mung bleiben. Wenn beide Kiefer mir Sensoren 
versehen sind, kann zwischen der lagerichti- 
gen Darstellung des Unterkiefers und des 
Oberkiefers umgeschaltet werden. Es ist 
jedoch auch mdglich, den Datensatz in einen 
das Unterkiefer betreffenden Teil und einen das 
Oberkiefer betreffenden Teil zu unterteilen, 
wobei es dann m&glich ist, sowohl Unterkiefer 
als auch Oberkiefer lagerichtig mit dem ent- 
sprechenden Datensatz uberlagert darzustel- 
len. 

Wesentlich an der vorliegenden Erfindung ist, daft 
der Schritt der anfanglichen Einstellung der Zuordnung 
zwischen dem Datensatz und der optischen Darstellung 
wesentlich vereinfacht wird. Wenn diese Zuordnung ein- 
mal hergestellt ist, kann das Verfahren so ablaufen, wie 
dies in der EPA 488 987 beschrieben ist. Da die Lage 
der Markierungspunkte in der Vorrichtung zur Lagebe- 
stimmung bekannt ist, ist es nicht notwendig, dies 
Punkte mit einem 3D-Stylus abzutasten, oder sonstige 
Maftnahmen zu treffen, um das System einzustellen. 

In einem zweiten Aspekt der vorliegenden Erfin- 
dung wird die Darstellung nicht mit dem betreffenden 
Kiefer selbst durchgefuhrt, sondern es wird ein Modell 
4cu v der Kiefer in einer bekannten Art hergestellt. Die Vor- 
f a Vichtung zur Lagebestimmung paftt dann auch in dieses 
U'yModell in einer eindeutig bestimmten Lage. Auf diese 
Weise kann das Modell mit lagerichtig Oberlagertem 
Datensatz dargestellt werden. Damit ist es in einer sehr 
komfortablen Art mGglich, eine Operationsplanung 
durchzufuhren, oder verschiedene Varianten eines Ein- 
griffs zu simulieren. 

Diese beiden ersten Aspekte kOnnen miteinander 
kombiniert werden," wodurch der Bezug des realen Kie- 
fers zu dem Modell in einer sehr anschaulichen Art dar- 
gestellt werden kann. Weiters kann die optische 
Darstellung auch festgehalten werden, indem Photogra- 
phien oder Videoaufnahmen angefertigt werden. 

Die Darstellung selbst kann in der Weise erfolgen, 
die in der EP-A 488 987 beschrieben ist. Dabei wird 
eine Videokamera, die mit einem Lagesensor versehen 
ist, dazu verwendet, eine optische Darstellung des 
Objektes, also des Kiefers oder des Modells zu erzeu- 
gen, die auf einem entsprechenden Monitor angezeigt 
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wird. Da sowohl die raumliche Lage der Kamera. als 
auch die raumliche Lagedes Objektes bekannt ist, kann 
eine Darsteliung des Datensatzes berechnet werden, 
die dem gleichen Blickwinkel und dem gleichen MaB- 
stab entspricht. Somit fallen die entsprechenden Struk- 
turen der optischen Darsteliung und aus der Aufnahme 
des bildgebenden Verfahrens zusammen und konnen 
lagerichtig gleichzeitig Oder alternativ dargestellt wer- 
den. 

Es ist jedoch in einer vorteilhaften Ausfuhrungsvari- 
ante der Erfindung m6glich, daB das Erzeugen einer 
Uberlagerung des optischen Bildes mit dem Datensatz 
dadurch erfolgt, daB eine Anzeigedes Datensatzes zwi- 
schen dem Auge des Betrachters und dem darzustel 
lenden Kiefer bzw. dem Model! des Kiefers 
zwischengeschaltet wird. Eine solche Anzeige kan.* 
etwa als transparentes LCD (Flussigkristall) Displa^ 
ausgebildet sein. Der Anwender beobachtet dabei die 
reale Situation durch das Display hinduj^h^ jLufjdsnn 
gleichzeitig der Datensatz-<Jargestellt-wird,-lm Augedes^ 
Ao^ndex^k omrnt es da durch zur Uberlagerung. Tm all- 
gemeinen Fall ist sowohl der Anwender als auch das 
Display frei beweglich t wobei jedoch die Randbedin- 
gung erfullt sein muB, daB der Anwender das Objekt 
durch das Display hindurch beobachten kann. In die- 
sem Fall tragt sowohl der Anwender als auch das Dis- 
play einen 3D-Sensor, damit wiederum die jeweilige 
Perspektive berechnet werden kann. Ein solches Ver- 
fahren ist fOr allgemeine Objekte im AT - Patent 398 163 
des Anmelders dargestellt. Diese Variante besitzt den 
Vorteil, daB dej^Aow^nder - abgesehen von dem sehr 

railnerrundOelchte^ - keinerlei Vorrichtung auf 

dem Kopf trageTTrTraBTvveiters ist es auf einfache Weise 
moglich. auch weiteren Personen den Zugang zu der 
Darsteliung zu verschaffen. 

Ferner ist es jedoch im Rahmen der Erfindung in 
gleicher Weise mOgltch, das Display als Brille auszubil- 
den oder sonst test mit dem Kopf des Anwenders zu 
verbinden. Auch die Verwendung halbdurchiassiger 
Spiegel oder sonstiger Verfahren zur Einspiegelung in 
das Auge des Betrachters sind grundsatzlich m6g!ich. 

In einer besonders bevorzugten Variante des erfin- 
dungsgemSBen Verfahrens ist vorgesehen, daB vom 
Anwender dreidimensionale Strukturen in den Daten- 
satz der Aufnahme eingefugt^ecderrond flcrft diese in 
lagerichtiger Zuordnung zurn optischen Bild^iargestellt 
werden. Auf diese Weise ist-e^jiehTmjr mdglich, 
)gewisse nur undeutliche Strukturen in der Aufnahme 
hervorzuheben, sondern es kann auch in sehr einfacher 
Weise eine Simulation durchgefuhrt werden. Dies ist 
etwa dann vorteilhaft, wenn im Rahmen eines kieferor- 
thopadischen Eingriffs eine Veranderung gezielt herbei- 
gefuhrt werden soil. Dabei kann der gewunschte oder 
geplante Endzustand eingezeichnet werden. Es kflnnen 
auch Situationen dargestellt werden, die sich nach dem 
Entfernen oder Hinzufugen von Knochenkeilen erge- 
ben. Anhand der Darsteliung am Modell kann so uber 
die Durchf uhrbarkeit - und Problematik eines solchen 
Eingriffs sehr genau AufschluB gewonnen werden. 
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Weiters kann die optische Darsteliung nicht nur 
"live" erfolgen, sondern auch festgehalten werden, 
indem Photographien oder Videoaufnahmen angefertigt 
werden. Wenn dabei die Vorrichtung zur Lagebestim- 
mung auch optisch sichtbare Markierungspunkte auf- 
weist, so kann das erfindungsgemaBe Verfahren 
geringfugig modifiziert werden. Die vorbereitenden 
Schritte errtsprechen denen des oben beschriebenen 
Verfahrens. In der Folge wird der Einfachheit halber von 
der Aufnahme von Photos ausgegangen. Fur Videoauf- 
nahmen gilt das Gesagte sinngemaG. Je nachdem, ob 
die Photoaufnahmen vom Kiefer selbst oder von einem 
Modell angefertigt werden soil, wird ein solches Modell 
^hergestellt oder nicht. Wesentlich ist. daB mindesten s 
eineA ufnahme. besser iedoch zwei oder mehr Auf nah- 
m'en jeweils aus der gleich e n Perspektive einmal mit 
eingesetzter Vorrichtung zurl^ge^^njrnyrng. und ein- 
maf ohne. diese- jVergesteTlt werden. Da die Markie- 
rungspunkte der Vorrichtung auch auf den Photos 
sichtbar sind, k6nnen diese auf einem Monitor mit der 
RSntgen- Aufnahme o. dgl. in Qbereinstimmung 
gebracht werden. Auf diese Weise ist es m6glich. die 
entsprechende Koordinatentransformation zu bestim- 
men. Da die Photos o hne di e^Vpr richtung aus der g lei- 
chen Perspektive h^^stenTIw^ es 
nlTnrnehr mdglich, auch Jn diese den -Datensatz-aus 
dem bildgebenden Verfahren lagerichtig ^ einzubLenden. 
Dies ist wesentlich, da erst auf dieser Aufnahme die 
interessierenden Strukturen ohne Behinderung durch 
die Vorrichtung ersichtlich sind. Falls zwischen den Auf- 
nahmen der Photos eine gewisse Bewegung des Kie- 
fers stattgefunden hat, wie dies in manchen Fallen 
unvermeidlich ist, so wird das Verfahren dadurch nicht 
beeintrachtigt. da der auBen angebrachte Lagesensor 
diese Bewegung erfaBt und somit eine entsprechende 
Korrektur mflglich ist. Neben der Darsteliung der Photos 
ist naturlich auch bei dieser Variante des Verfahrens die 
"live" Darsteliung, wie sie oben beschrieben ist, zusatz- 
lich mfiglich. Das Verfahren ist vereinfacht, da ein eige- 
ner 3D-Sensor der Vorrichtung zur Lagebestimmung 
entbehrlich ist. 

Weiters betrifft die vorliegende Erfindung eine Vor- 
richtung zur Lagebestimmung, die fur eines der obigen 
Verfahren verwendbar ist. wobei die Vorrichtung in die 
Mundhfihle einer Person einfuhrbar ist und so ausgebil- 
det ist, daB sie durch Oberkiefer und Unterkiefer der 
Person in einer eindeutig reproduzierbaren Stellung 
gehalten werden kann. Diese Vorrichtung ist dadurch 
gekennzeichnet, daB sie Markierungspunkte aufweist, 
die mit einem bildgebenden Verfahren identifizierbar 
sind und daB sie weiters einen Lagesensor aufweist. 
der eine genaue Bestimmung der raumlichen Lage der 
Vorrichtung ermdglicht. Wie dies oben bereits beschrie- 
ben worden ist, kann der Lagesensor errtfernbar sein, 
solange gewahrleistet ist, daB bei eingebautem Sensor 
die raumliche Zuordnung zwischen Sensor und den 
Markierungspunkten eindeutig und reproduzierbar ist. 

Vorzugsweise ist vorgesehen, daB die Vorrichtung 
aus einem festen Grundkarper besteht, der die Markie- 
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rungspunkte und den Lagesensor aufweist und daB an 
diesem GrundkSrper HaltekOrper aus einem flexiblen, 
erhartbaren Material gebildet sind, die sich der Form 
von Zahnen oder dem Kiefer anpassen. Die Vorrichtung 
wird dabei zunachst in der Art eines Abdruckes an das s 
Kiefer angepaBt und kann nach dem Erharten reprodu- 
zierbar in der gleichen Lage eingesetzt werden. 

In einer Variante der Vorrichtung weist diese Mar- 
kierungspunkte auf, die sowohl mit einem bildgebenden 
Verfahren identifizierbar sind, als auch optisch sichtbar io 
sind. 

In der Folge wird die Erfindung durch die in den 
Figuren dargestellten Ausfuhrungsbeispiele n&her 
erl&utert. Die Figuren zeigen schematisch: 

Die Fig. 1 eine Person mit einer in die Mundhdhle 15 
eingesetzten Vorrichtung zur Lagebestimmung; die Fig. 
2 ein erstes System, mit dem das erfindungsgemSBe 
Verfahren durchgefuhrt werden kann; die Fig. 3 ein 
zweites System, mit dem das erfindungsgemSBe Ver- 
fahren durchgefuhrt werden kann und die Fig. 4 eine 20 
Variante der Ausfuhrung von Markierungspunkten. 

In der Fig. 1 ist der Kopf einer Person mit Unterkie- 
fer 1 und Oberkiefer 2 angedeutet. Dazwischen bef indet 
sich eine Vorrichtung 3 zur Lagebestimmung. die als 
sogenannter Splint ausgebildet ist, der in einer eindeu- 25 
tig reproduzierbaren Stellung eingesetzt werden kann. 
In dieser Vorrichtung 3 ist eine Anzahl von Markierungs- 
punkten 4 vorgesehen, die z.B. auf einer Rdntgendar- 
stellung klar ersichtlich sind. Ein 3D-Sensor 5 ist fest mit 
der Vorrichtung 3 verbunden. An der AuBenseite des 30 
Unterkiefers 1 ist ein weiterer 3D-Sensor 6 ange- 
schraubt. 

Das System von Fig. 2 besteht aus einer Kamera 
10, an der ein 3D-Sensor 11 fest angebracht ist. Die 
Kamera ist uber einen Computer 12 mit einem Monitor 35 
13 verbunden, auf dem der UnterWefer 1 dargestellt 
werden kann. In dem Computer 12 ist weiters eine Auf- 
nahme des bildgebenden Verfahrens gespeichert. Wei- 
ters ist der Computer mit einem Magnetfeldemitter 14 
verbunden, der raumfest angeordnet ist. Dadurch kann 40 
die jeweilige rSumliche Lage einschiieBlich der Winkel- 
lage der Sensoren 6 und 1 1 erfaBt werden. Der Compu- 
ter berechnet in Echtzeit eine Darstellung des 
Datensatzes aus dem bildgebenden Verfahren und 
zeigt diese auf dem Bildschirm an. 45 

Bei der Ausfuhrungsvariante von Fig. 3 ist der Com- 
puter 12 mit einem durchlSssigen LCD-Display 23 ver- 
bunden, das einen 3D-Sensor 22 trSgt. der Betrachter 
20 tragt eberrfalls einen 3D-Sensor 21. Neben dem 
Sensor 6, der wie bei der vorigen Ausfuhzungsvariante so 
mit dem Unterkiefer 1 verbunden ist. ist hier auch ein an 
der Stirn angebrachter Sensor 26 vorgesehen, der 
somit mit dem Oberkiefer 2 fest verbunden ist. Der 
Computer berechnet eine Darstellung des bildgeben- 
den Verfahrens, die der jeweiligen Stellung von Kiefer 1 , ss 
2, Display 23 und Betrachter 20 zueinander entspricht. 
In gleicher Weise kann ein Modell 30 des Kiefers 
betrachtet werden, das mit Sensoren 31, 32 bestuckt 
ist. 


Die Fig. 4 zeigt schematisch eine Alternative zur 
Ausfuhrung der Markierungspunkte, die in oder an der 
Vorrichtung zur Lagebestimmung angebracht sind. In 
drei zueinander rechtwinkeligen Ebenen 40, 41, 42 sind 
Strukturen angeordnet, die auf der Rdntgenaufnahme 

0. dgl. einen Kontrast ergeben. Zwei dieser Ebenen 40, 
42 sind dann. wenn die Vorrichtung 3 in das Kiefer 1 , 2 
eingesetzt ist, im wesentlichen parallel zur Symmetrie- 
ebene des Kbpfes. Die Strukturen bestehen jeweils aus 
einem Rechteck mit einer Diagonale. Mit 50 ist eine 
gedachte Schichtebene einer CT-Aufnahme bezeich- 
net, die rechtwinkelig zu den Ebenen 40 und 42 ist. In 
der entsprechenden Darstellung dieser CT-Schicht 50 
erscheint die obere Seite 60 des Rechtecks als Punkt 
60a, die untere Seite 61 als Punkt 61a und die Diago- 
nal 62 als zwischen diesen Punkten 60a und 61a iie- 
genden Punkt 62a. Aus dem Verh&ttnis der AbstSnde m 
und n des Punktes 62a zu den Punkten 60a und 61a 
kann man die genaue Lage der Schicht 50 bestimmen. 
Auf diese Weise ist es m&glich, die Information des CTs 
uber den Tischvorschub zu korrigieren, was etwa dann 
erforderlich ist. wenn sich der Patient wShrend des 
Scanvorganges bewegt hat. 

Die Ebenen 40, 41 , 42 mit den oben beschriebenen 
Strukturen k6nnen sowohl in der Vorrichtung zur Lage- 
bestimmung integriert sein, als auch durch eine starre 
Verbindung mir ihr so verbunden sein, daB sie auBer- 
halb der Kiefer 1 ( 2 liegen. 

Patentanspruche 

1 . Verfahren zur Darstellung des Kiefers einer Person, 
bestehend aus folgenden vorbereitenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die Markierungspunkte (4) aufweist, 
in die Mundh6hle der Person; 
Erstellen mindestens einer Aufnahme des Kie- 
fers (1,2) der Person mit einem bildgebenden 
Verfahren, wie etwa R6ntgen, Tomographie, 
NMR oder dgl., wobei die Markierungspunkte 
(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme als Datensatz; 
Identifikation der Markierungspunkte (4); 

wobei zur Darstellung folgende Schritte durchge- 
fuhrt werden: 

Anbringen eines 3D-Sensors (6, 26) auf der 
AuBenseite des betreffenden Kiefers (1,2); 
Neuerliches Einfuhren der Vorrichtung (3) zur 
Lagebestimmung, falls diese inzwischen ent- 
nommen worden ist, in die Mundhbhle in glei- 
cher Lage wie bei der Erstellung der 
Aufnahme, wobei die Vorrichtung (3) mit einem 
3D-Sensor (5) ausgestattet ist; 
Bestimmen der lagemSBigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
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und dem 3D-Sensor (6. 26) auf der AuBenseite 
des Kiefers (1,2); 
- Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 

Erzeugen einer Uberlagerung eines optischen 
Bildes des Kiefers (1. 2) mit dem Datensatz in 
lagerichtiger Zuordnung. 

2. . Verfahren zur Darstellung eines Modells des Kie- 
fers einer Person, bestehend aus folgenden vorbe- 
reitenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die Markierungspunkte (4) aufweist, 
in die Mundhohle der Person; 
Erstellen mindestens einer Aufnahme des Kie- 
fers (1, 2) der Person mit einem bildgebenden 
Verfahren, wie etwa R6ntgen, Tomographie, 
NMR Oder dgl.. wobei die Markierungspunkte 
(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme als Datensatz; 
Identifikation der Markierungspunkte (4); 
Herstellen eines Abdruckes des Kiefers (1. 2) 
und Erzeugen eines Modells (30) des Kiefers 
(1.2); 

wobei zur Darstellung folgende Schritte durchge- 
fuhrt werden: 

Anbringen eines weiteren 3D-Sensors (31 , 32) 
auf der AuBenseite des Modells (30) des Kie- 
fers (1,2); 

Einfuhren der Vorrichtung (3) zur Lagebestim- 
mung in das Modell (30) in gleicher Lage wie 
bei der Erstellung der Aufnahme, wobei die 
Vorrichtung (3) mit einem 3D-Sensor (5) aus- 
gestattet ist; 

Bestimmen der lagemaBigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
und dem 3D-Sensor (30 f 31) auf der AuBen- 
seite des Modells (30) des Kiefers (1, 2); 
Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 

Erzeugen einer Uberlagerung eines optischen 
Bildes des Modells (30) mit dem Datensatz in 
lagerichtiger Zuordnung. 

3. Verfahren zur Darstellung des Kiefers einer Person 
und eines Modells davon, bestehend aus folgenden 
vorbereitenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die Markierungspunkte (4) aufweist, 
in die Mundhehle der Person; 
Erstellen mindestens einer Aufnahme des Kie- 
fers (1, 2) der Person mit einem bildgebenden 
Verfahren, wie etwa RGntgen, Tomographie, 
NMR Oder dgl., wobei die Markierungspunkte 


(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme als Datensatz; 
Identifikation der Markierungspunkte (4); 
Herstellen eines Abdruckes des Kiefers (1, 2) 
5 und Erzeugen eines Modells (30) des Kiefers 

0.2); 

wobei zur Darstellung folgende Schritte durchge- 
fuhrt werden: 

TO 

Anbringen eines weiteren 3D-Sensors (6, 26) 
auf der AuBenseite des betreffenden Kiefers 
(1.2); 

Neuerliches Einfuhren der Vorrichtung (3) zur 
is Lagebestimmung, falls diese inzwischen ent- 

nommen worden ist. in die Mundh6hle in glei- 
cher Lage wie bei der Erstellung der 
Aufnahme, wobei die Vorrichtung (3) mit einem 
3D-Sensor (5) ausgestattet ist; 
20 • Bestimmen der lagerr&Bigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
und dem 3D-Sensor (6, 26) auf der AuBenseite 
des Kiefers (1,2); 

Entfernen der Vorrichtung (3) zur Lagebestim- 

25 mung; 

Anbringen eines weiteren 3D-Sensors auf der 
AuBenseite des Modells des Kiefers (1, 2); 
Einfuhren der Vorrichtung (3) zur Lagebestim- 
mung in das Modell (30) des Kiefers (1, 2) in 

30 gleicher Lage wie bei der Erstellung der Auf- 

nahme, wobei die Vorrichtung (3) mit einem 
3D-Sensor (5) ausgestattet ist; 
Bestimmen der lagemaBigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 

35 und dem 3D-Sensor (30, 31) auf der AuBen- 

seite des Modells (30) des Kiefers (1, 2); 
Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 

Erzeugen einer Uberlagerung eines optischen 
40 Bildes des Kiefers (1, 2) mit dem Datensatz in 

lagerichtiger Zuordnung Oder alternativ dazu 
Erzeugen einer Uberlagerung eines optischen 
Bildes des Modetls (30) des Kiefers (1, 2) mit 
dem Datensatz in lagerichtiger Zuordnung. 

45 

4. Verfahren nach einem der Anspruche 1 bis 3, 
dadurch gekennzeichnet, daB das Erzeugen der 
Clberlagerung eines optischen Bildes mit dem 
Datensatz auf einen Monitor (13) erfolgt, wobei das 
so optische Bild von einer Videokamera (10) aufge- 
nommen wird, die mit einem 3D-Sensor (11) zur 
Bestimmung der raumlichen Lage fest verbunden 
ist 

55 5. Verfahren nach einem der Anspruche 1 bis 3, 
dadurch gekennzeichnet. daB das Erzeugen einer 
Uberlagerung des optischen Bildes mit dem Daten- 
satz dadurch erfolgt, daB eine Anzeige des Daten- 
satzes zwischen dem Auge des Betrachters (20) 


6 


11 


EP 0 741 994 A1 


12 


und dem darzustellenden Kiefer (1, 2) bzw. dem 
Modell (30) des Kiefers (1, 2) zwischengeschaltet 
wird. 

6. Verfahren nach Anspruch 5, dadurch gekennzeich- s 
net, daB die Anzeige als transparentes LCD-Dis- 
play (23) ausgebildet ist. 

7. Verfahren nach Anspruch 5 oder 6, dadurch 
gekennzeichnet, daB die Anzeige als Brilte, als ein 10 
Schirm, der zwischen Beobachter und Kiefer (1,2) 
bzw. Modell angeordnet ist und der vorzugsweise 
einen 3D-Sensor tr&gt, ausgebildet ist, oder daB die 
Anzeige durch Einspiegelung des Datensatz in das 
Auge des Beobachters (20) durchgefuhrt wird. rs 

8. Verfahren nach einem der AnsprQche 1 bis 7, 
dadurch gekennzeichnet, daB vom Anwender drei- 
dimensionale Strukturen in den Datensatz der Auf- 
nahme eingefugt werden und daB diese in 20 
lagerichtiger Zuordnung zum optischen Bild darge- 
stellt werden. 

9. Verfahren zur Darstellung des Kiefers einer Person 
und/oder eines Modells davon, bestehend aus fol- 25 
genden vorbereitenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die optisch sichtbare Markierungs- 
punkte (4) aufweist, in die Mundhdhle der 30 
Person; 

Erstellen mindestens einer Aufnahme des Kie- 
fers (1, 2) der Person mit einem bildgebenden 
Verfahren, wie etwa RGntgen, Tomographie, 
NMR oder dgl., wobei die Markierungspunkte 35 
(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme als Datensatz; 
gegebenenfalls Herstellen eines Abdruckes 
des Kiefers (1 , 2) und Erzeugen eines Modells 
(30) des Kiefers (1, 2); 40 

wobei zur Darstellung folgende Schritte durchge- 
fuhrt werden: 

Anbringen eines weiteren 3D-Sensors (6 ? 26) 45 
auf der AuBenseite des betreffenden Kiefers 
(1, 2) bzw. des Modells (30) des Kiefers; 
Neuerliches Einfuhren der Vorrichtung (3) zur 
Lagebestimmung, falls diese inzwischen ent- 
nommen worden ist, in die MundhOhle bzw. in so 
das Modell (30) in gleicher Lage wie bei der 
Erstellung der Aufnahme des bildgebenden 
Verfahrens; 

Herstellung mindestens einer photographi- 
schen oder Video-Aufnahme des Kiefers (1, 2) ss 
bzw. des Modells (30); 

Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 


Herstellung mindestens einer weiteren photo- 
graphischen oder Video- Aufnahme des Kiefers 
(1, 2) bzw. des Modells (30) aus der gleichen 
Position; 

Speicherung der photographischen oder 
Video-Aufnahmen als Datensatz; 
Herstellen der Ubereinstimmung der MarWe- 
rungspunkte auf der Aufnahme des bildgeben- 
den Verfahrens und der optischen Darstellung; 
Erzeugen einer Oberlagerung eines optischen 
Bildes des Kiefers (1, 2) mit dem Datensatz in 
lagerichtiger Zuordnung oder alternativ dazu 
Erzeugen einer Oberlagerung eines optischen 
Bildes des Kiefers (1 , 2) bzw. des Modells (30) 
mit dem Datensatz in lagerichtiger Zuordnung. 

10. Vorrichtung zur Lagebestimmung, die fur ein Ver- 
fahren nach einem der AnsprQche 1 bis 8 verwend- 
bar ist, wobei die Vorrichtung (3) in die MundhOhle 
einer Person einfuhrbar ist und so ausgebildet ist, 
daB sie durch Ob er kiefer (2) und Unter kiefer (1) der 
Person in einer eindeutig reproduzierbaren Stellung 
gehalten werden kann, dadurch gekennzeichnet, 
daB die Vorrichtung (3) Markierungspunkte (4) auf- 
weist, die mit einem bildgebenden Verfahren identi- 
f izierbar sind und daB sie weiters einen Lagesensor 
(5) aufweist, der eine genaue Bestimmung der 
rSumlichen Lage der Vorrichtung (3) erm&glicht. 

11. Vorrichtung nach Anspruch 10, dadurch gekenn- 
zeichnet, daB sie aus einem festen Grundkdrper 
besteht, der die Markierungspunkte (4) und den 
Lagesensor aufweist und daB an diesem Grundkdr- 
per Haltekftrper aus einem flexiblen, erh&rtbaren 
Material gebildet sind, die sich der Form von Zah- 
nen oder dem Kiefer (1 , 2) anpassen. 

12. Vorrichtung zur Lagebestimmung, die fur ein Ver- 
fahren nach Anspruch 9 verwendbar ist, wobei die 
Vorrichtung (3) in die MundhOhle einer Person ein- 
fuhrbar ist und so ausgebildet ist, daB sie durch 
Oberkiefer (2) und Unterkiefer (1) der Person in 
einer eindeutig reproduzierbaren Stellung gehalten 
werden kann, dadurch gekennzeichnet, daB die 
Vorrichtung (3) Markierungspunkte (4) aufweist, die 
sowohl mit einem bildgebenden Verfahren identrfi- 
zierbar sind, als auch optisch sichtbar sind. 
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(54) Process for display of the jaw 

(57) The invention concerns a process for display of a person's jaw (1, 2) and a model thereof 
The process involves the following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) with marking 
points (4); 

- Taking at least one image of the person's jaw (1 , 2) by means of an imaging procedure, such 
as X-ray, tomography, NMR or similar, whereby the marks are also photographed, and storing 
the image as a data record; 

- Identifying the marking points (4); 

- Producing an impression of the jaw (1 , 2) and generating a model of the jaw (1 > 2). 
The following stages are carried out in order to display the jaw: 

- Applying an additional 3D sensor on the outside of the jaw in question (1, 2); 

- Re-introducing the position-determining device (3), if meanwhile removed, into the oral 
cavity in the same position as when taking the image, the device (3) being fitted this time with 
a 3D sensor; 
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- Determining the positional relationship between the 3D sensor of the device (3) and the 3D 
sensor on the outside of the jaw (1,2); 

- Removing the position-determining device (3); 

- Placing an additional 3D sensor on the outside of the model of the jaw (1, 2); 

- Introducing the position-determining device (3) into the model of the jaw (1 , 2) in the same 
position as when taking the image, the device (3) being fitted with a 3D sensor; 

- Determining the positional relationship between the 3D sensor of the device (3) and the 3D 
sensor on the outside of the model of the jaw (1, 2); 

- Removing the position-determining device (3); 

- Generating a superimposition of an optical image of the jaw (1 5 2) with the data record in a 
correct positional arrangement, or alternatively generating a superimposition of an optical 
image of the model of the jaw (1,2) with the data record in a correct positional arrangement. 
The invention further involves a position-determining device (3). 
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Description 


The invention involves a procedure for display of a person's jaw (1, 2) and/or a model thereof. 

When producing dental implants, it is vital to accurately plan the operative procedures. A 
number of measures are available for this purpose. Normally an impression of the patient's 
jaw is taken, from which a model of the jaw can be made. Alternatively, a number of imaging 
procedures are suitable for providing the attending physician/dentist with information on the 
specific situation. These may be regular-X-ray images, tomograms or NMRs (nuclear 
magnetic resonance images). However, all these cases share the unsatisfactory aspect that the 
observer must reconcile the model, on the one hand, with the display resulting from imaging 
methods, on the other. What is even more difficult is having to reconcile the real situation 
during the operation itself with the model or the previously generated display. 

From the applicant's EPA 488 987 a procedure is known for displaying movable bodies, in 
which a visual display of the body and a data field can be displayed simultaneously or 
alternately in real time, from the same perspective and to the same scale. Such a procedure is 
basically suitable for solving the problem described above. An optical image of the jaw in 
question is displayed on a monitor, while the associated data record, which is the result of the 
imaging procedure, is displayed at the same time. A position sensor must be attached to the 
relevant body parts, to guarantee that the data record is displaced in accordance with any 
movement of the body part, e.g. the lower jaw in the case in question. A prerequisite for this 
procedure is, however, an initial setting of the system in which the characteristic points of the 
data record are identified and coordinated with the corresponding characteristic points in the 
visual display. However, major problems occur when applying such a procedure to the human 
jaw, since the requisite characteristic points are not present in sufficient numbers. This is 
particularly true in the case of a toothless jaw. In addition, the required accuracy in the area of 
the jaw makes such a setting problematic even when teeth are present. 

Additionally, so-called articulators are known for determining the position of the lower jaw. 
These enable determination, for example, of the position of the virtual longitudinal axis of the 
lower jaw. However, such articulators do not help to solve the problem described above, since 
the oral cavity must be freely accessible during the actual intervention. 

Another possible way of applying marking points on the skin of the outside of the jaw cannot 
be implemented, since the patient is normally anesthetized during interventions. For this 
purpose, intubation is performed through the nose, resulting in complete relaxation of the 
facial muscles and leading to a displacement of the marking points. This makes it impossible 
to use these points to determine position. Fixing a marking body through the skin when 
producing the images is generally not possible because of the distress thus caused to the 
patient. 

One of the objectives to be achieved by the invention is to avoid these drawbacks and create a 
procedure which allows for careful planning of a surgical interventio n in the area of the jaw by 
means of a model, whereby displays trom imaging procedures may be used for graphic 
purposes. A further object of the invention is to enable the condition achieved at any particular 
moment to be controlled by making available a visual display of the operation area, which is 
superimposed in a correct positional arrangement with the result of the imaging procedure. 
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According to the invention, this is achieved in a first aspect of the invention by performing the 
following steps: 

1 . Preparatory steps: these can be earned out at any time prior to the actual display; in this 
regard, the only requirement is that the jaw does not change (e.g. as a result of a dental 
procedure) between performance of these steps and the display. 

- Introducing a position-determining device (3) with marking points into the person's oral 
cavity; it is important for the device to occupy a position in the oral cavity which is 
unambiguous and can be precisely reproduced. The marking points should provide good 
contrast in the specific imaging procedure used, and hence be readily identifiable. In the case 
of X-rays, these may be lead pellets immovably cast in the plastic material. Another type of 
marking point could be the corners of a wire structure or similar built into the device. At this 
point, the position sensor described below is not necessarily contained in the device or 
attached to it. However, the important thing is that it must subsequently be possible to connect 
this position sensor to the device in a positionally unambiguous fashion. 

- Taking^fTeastone image^f the person's jaw with an imaging procedure, such as X-ray, 
tomograph>vi^^ whereby the marks are also photographed, and storing the 
image as a data record; this so-called "digitization" is a prerequisite for the subsequent 
processing of the image. 

- Identifying the marking points; this can be done manually, for example by searching for one 
marking point after the other on the screen by means of the cursor, thereby identifying them. 
This means that the coordinates of the marking points are identified in the image system of 
coordinates. However, it is also possible to use a pattern-recognition procedure for 
identification. 


2. Steps for producing the actual display: these steps are carried out when the person is 
amined or auii. n .:2 an intervention. 

- Placing a 3D sensor on ihe outside of the jaw in question; this is done, for example, by 
screwing the holder for the 3D sensor through the skin in the area of the person's chin if the 
lower jaw is to be displayed. It is, of course, also possible to prepare both tire lower and the 
upper jaw for display, by using two severs. 

- Re-introducing the position-determining device, if meanwhile removed, into the oral cavity 
in the same position as when producing the ima-e, the device being fitted with a 3D sensor. In 
principle, it is possible for the image to be produced immediately before the display. In this 
case, the position-determining device may still be in vl?e mouth. Generally speaking, however, 
the device is re-inserted at this stage: attention must be pejd to achieving exactly the same 
position relative to the jaw as when the picture was taken. 'F.\e 3D sensor must be attached to 
the device, or built into it. What is important is that the position of this sensor, relative to the 
markings, must be unambiguous and accurately known. 

- Determining the positional relationship between the 3D sensor of the device and the 3D 
sensor on the outside of the jaw; this is achieved by determining the spatial position cf the two 
sensors at the same or nearly the same time. 

- Removing the position-determining device; this provides free access to the oral ci uty. 
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- Producing a superimposition of an optical image of the jaw with the data record in a correct 
positional arrangement. Because of the sensor on the outside of the jaw, the current position of 
the jaw is always known. By performing a series of transformations of coordinates, the data 
record can be positioned such that the structures of the data record always agree with the 
corresponding structures of the optical image, even when a spatial movement of the jaw 
occurs. If both jaws are fitted with sensors, it is possible to toggle between the positional 
display of the lower and upper jaws. However, it is also possible for the data record to be 
divided into a lower-jaw and an upper-jaw part, making it possible to display both the lower 
and the upper jaw positionally superimposed with the corresponding data record. 

What is important about the present invention is its major simplification of the stage of initial 
adjustment of the arrangement between the data record and the optical display. Once this 
arrangement has been produced, the procedure can run as described in EPA 488 987. Since 
the position of the marking points in the position-determining device is known, it is not 
necessary to scan these points with a 3D stylus or to take other measures to adjust the system. 

In a second aspect of the present invention, the display is not carried out with the jaw in 
question; instead, a model of the jaw is produced by means of the known method. The 
position-determining device then fits into an unambiguously determined position in this 
model. In this fashion, the model can be displayed with a positionally superimposed data 
record. This makes it possible to plan operations or to simulate diverse variants of an 
intervention in a very convenient fashion. 

It is possible to combine these first two aspects with a highly graphic display of the 
relationship between the real jaw and the model. Furthermore, the optical display can also be 
saved by taking still or video pictures. 

The display itself can be dealt with as described in EP-A 488 967. For this purpose, a video 
camera fitted with a position sensor is used to produce an optical display of the object, i.e. the 
jaw or model, and this is then shown on an appropriate monitor. Since both the spatial 
position of the camera and the spatial position of the object are known, it is possible to 
calculate a representation of the data record which corresponds to the same angle of view and 
the same scale. This leads to a coincidence of the corresponding structures of the optical 
display and from the picture of the imaging procedure, making it possible for them to be 
displayed simultaneously or alternately in a correct positional arrangement. 

However, in an advantageous embodiment of the invention, it is possible for superimposition 
of the optical image with the data record to be generated by interposing a display of the data 
record between the eye of the observer and the jaw to be displayed, or alternatively the model 
of the jaw. Such a display can be generated as a transparent LCD display. In this case, the user 
observes the real situation, through Ae. display, on which the da ta record is displayed at the 
same time. This means that superimposition occurs in the eye of the _uj er> Generally, both the 
user and tlie=aTspTay canmove freely, although marginal conditions must be observed so that 
the user can observe the object through the display. In this case, both the user and the display 
are fitted with a 3D sensor so that the relevant perspective can be calculated. Such a procedure 
is shown for general objects in the applicant's Austrian patent AT 398 163. This variant has 
the advantage of not requiring the user to wear any device on the head, other than the very 
"smanniffit^^igh 1 s^isor^dditionally, it is possible to allow additional persons to access the 
display in -a-simple-fiashlon. 

However, it is further possible, in the framework of the invention, for the display to be 
projected as eye glasses or otherwise securely connected to the user's head. The use of 
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semi-transparent mirrors or other processes to reflect an image into the observer's eye is 
another basic option. / rl . 

In a particularly favorable variant of the process according to the invention, the user would 
add three-dimensional structures to the image data jeeW and this would be displayed in a 
correct positional arrangement relative to the/6ptical image. In this way, it is possible not only 
to enhance structures which are unclear in therimagerbuf also to produce a simulation in a 
very simple fashion. This is advantageous, for example, if a modification is to be carried out 
as part of an orthopedic operation on the jaw. This would make it possible to draw in the 
desired or planned final state. Situations can also be displayed which will result after 
removing or adding segments of bone. The model-based display allows for very accurate 
indications as to the feasibility and related problems of such an intervention. 

Furthermore, not only can the optical display be provided "live": it can also be preserved by 
; means of still or video pictures. If the position-determining device also shows optically visible 

-..I ■■•marking points, the procedure according to the invention can be slightly modified. The 

preparatory steps correspond to those of the procedure described above. For simplicity's sake 
the following description will assume still photos are taken. The explanation is applicable to ' 
video images with appropriate modifications. Depending on whether the photos are to be 
taken of the jaw itself or a model, such a model may or may not be produced. The important 

thing is that at leas t one, but preferably two or more picture s are produced from the same 

perspective, each time one picture wnen Uepositi on-determining devicejs"mplace and 

/r another when' the position-determining device is not mserted? Since themai-kingpoints of the 
device are also visible on the photos, these can be superimposed on a monitor with the X-ray 
picture or similar. This enables determination of the corresponding transformation of 
coordinates. Since the photos without the device have been produced from the same 
perspective, the data record resulting from the imaging procedure can b e superimposed, in the 
correct pos iti on, onto these photos as well. This is vital because only onthis image are the 
relevant structures visible without obstruction by the device. If some movement of the jaw has 
taken place between the taking of the photos, as is unavoidable in many cases, this does not 
impair the procedure, since the positional sensor applied on the outside records this 
movement, thus enabling a suitable correction. Apart from displaying the photos, this variant 
of the procedure naturally also enables "live" display, as described above. The procedure is 
simplified, since a dedicated 3D sensor is required for the position-determining device. 

Moreover the present invention involves a position-determining device, which can be used for 
one of the above processes, whereby the device can be inserted in a person's oral cavity and is 
designed so that the person's upper and lower jaws can be maintained in a position which can 
be unambiguously reproduced. This device is characterized by the fact that it has marking 
points which can be identified by means of an imaging procedure, and that it furthermore has 
a position sensor which enables accurate determination of the spatial position of the device. 
As already described above, the position sensor can be removable as long as it is guaranteed 
that, with a built-in sensor, the spatial arrangement between sensor and the marking points is 
unambiguous and reproducible. 

In a preferred embodiment, the device consists of a fixed basic unit, which shows the marking 
points and the position sensor, and this basic unit has retaining devices consisting of a flexible 
material which can be hardened to fit the shape of teeth or the jaw. The device is first adapted 
to the jaw in the form of an impression, and after hardening can be placed reproducibly in the 
same position. 
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nlT/ iam °J lhe d f ViC6; h , hBS marki " 8 P ° intS Which can be ident 'fied both with an imasinP 
piocedure and are also visible optically. imaging 

The following material explains the invention by means of the embodiments shown in the 
diagrams. The figures provide the following schematic views: 

Fig. 1 shows a person with a position-determining device inserted in the oral cavity Fi e 2 
shows a first system for implementing the procedure according to the invention- Ffc 3 show, 
a second system for implementing the procedure according to me invention while Fig 4 
shows a variant of the embodiment of marking points. 8- 

Fig. 1 indicates the head of an individual with lower jaw 1 and upper jaw 2. Between these 
two is a position-determining device, which is designed as a so-called splint ^can^ 

ooimsl m F r mb K i8U ° USly , repr0dUCib,e P0Siti ° n - This device has a nU^m^ng 
points 4 which can be seen clearly, e.g. on an X-ray display. A 3D sensor 5 is secured 

connected to the device 3. An additional 3D sensor 6 is screwed onto the ouSde^S lower 

The system in Fig. 2 consists of a camera 10, to which a 3D sensor is securely attached The 
camera is connected via a computer 1 2 with a monitor 1 3, on which the lowe^jaw 1 can^e 
d splayed A picture from the imaging procedure is also stored in computer 12 .ZtomZc 
the computer is connected to a magnetic field emitter 14, in a fixed installation As a reTuk it 
.possible to record the specific spatial position, including the relative position of slZ 6 
and 11 . The computer calculates a display of the data record from the imaging procedure in 
real time, and displays this on the screen. 8 procedure in 

In the embodiment shown in Fig. 3, the computer 12 is connected to a transparent LCD 

to \ \ C ? aS • 3 ? SenS ° r 2Z ThC ° bserVer 20 a,SO wears a 3D -nsor 21. In addition 

to sensor 6, which as in the previous embodiment is connected to the lower jaw 1 here too 

fixe^S 1 o a nf nS ° r 26 ' Whkh iS W ° m ° n * e f0rehead and he ^ is s'ecurely 
r«Zt th t e "PPf r Jaw 2. The computer calculates a display of the imaging procedure which 
combines the relevant pos.tion of jaw 1, 2, display 23 and observer 20 Similarly 1 is possible 
to observe a model 30 of the jaw, which is fitted with sensors 31, 32. 

Fig. 4 is a schematic representation of an alternative to the design of the marking points which 
are on or m the position-determining device. Structures are arranged in three 40 4^ 42 

S "wf "I' 1 ? 8leS t0 CaCh 0ther " These Structures S e —* ■ contrast ont^e X-ra^ 
Picture When the device 3 is inserted in the jaw 1 , 2, two of these planes 40 42 are\nen 
basically parallel to the plane of symmetry of the head. Each structure consL of a rlctLle 
with a diagonal. 50 designates an imaginary plane of embedding of a CT image whichTaf 

sTde 60o ft;^ 5 . 40 ^ ^ ^ COrreS P°" di "g of this CT planf 50,'he upplr 

side 60 of the rectangle appears as point 60a, the lower side 61 as point 61a, and the diagonal 
62 as point 62a lying between these points 60a and 61a. The precise position of plane 5 |ca* 

"his lv m t n - ^, the ratl ° 0fth& diStanCCS m and n of P° int 62a to Points 60a and 61a to 
this way it ,s possible to correct the CT information for table advancers is necessarv if the 
patient has moved during the scanning process. necessary if the 

Planes 40 41, 42 with the structures described above can be integrated in the 

o^r^s^;? device ' and also coimected with st by a rigid Hnk such that they « 
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Patent claims 

1 . Procedure for displaying the jaw of a person, consisting of the following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
marking points (4); 

- Taking at least one image of the person's jaw (1,2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- Identifying the marking points (4); 

the following steps being performed for display purposes: 

- Applying a 3D sensor (6, 26) on the outside of the jaw in question (1,2) 

- Re-introducing the position-determining device (3), if meanwhile removed, into the oral 
cavity in the same position as when taking the image, the device (3) being fitted this time with 
a 3D sensor (5) 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (6, 26) on the outside of the jaw (1, 2) 

- Removing the position-determining device (3) 

- Generating a superimposition of an optical image of the jaw (1,2) with the data record in a 
correct positional arrangement. 


2. Procedure for display of a model of a person's jaw, consisting of the following steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
marking points (4); 

- Taking at least one image of the person's jaw (1 s 2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- Identifying the marking points (4); 

- Producing an impression of the jaw (1,2) and generating a model (30) of the jaw (1, 2); 
the following steps being performed for display purposes: 

- Placing an additional 3D sensor (31, 32) on the outside of the model of the jaw (1, 2) 

- Introducing the position-determining device (3) into the model (30) of the jaw (1, 2) in the 
same position as when taking the image, the device (3) being fitted with a 3D sensor (5) 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (30, 31) on the outside of the model (30) of the jaw (1, 2) 
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- Removing the position-determining device (3) 

- Generating a superimposition of an optical image of the model (30) with the data record in a 
correct positional arrangement. 


3. Procedure for display of a model of a person's jaw and a model thereof consisting of the 
following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
marking points (4); 

- Taking at least one image of the person's jaw (1,2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- Identifying the marking points (4); 

- Producing an impression of the jaw (1,2) and generating a model (30) of the jaw (1 , 2); 
the following steps being performed for display purposes: 

- Placing an additional 3D sensor (6, 26) on the outside of the model of the jaw in question (1, 

- Re-introducing the position-determining device (3), if removed in the meanwhile, into the 
oral cavity in the same position as when taking the image, the device (3) being fitted this time 
with a 3D. sensor (5); 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (6, 26) on the outside of the jaw (1, 2); 

- Removing the position-determining device (3); 

- Placing an additional 3D sensor (6, 20) on the outside of the model of the jaw (1, 2); 

- Introducing the position-determining device (3) into the model (30) of the jaw (1 , 2) in the 
same position as when taking the image, the device (3) being fitted with a 3D sensor (5); 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (30, 31) on the outside of the model (30) of the jaw (1, 2); 

- Removing the position-determining device (3); 

- Generating a superimposition of an optical image of the jaw (1, 2) with the data record in a 
correct positional arrangement, or alternatively generating an imposition of an optical image 
of the model (30) of the jaw (1,2) with the data record in a correct positional arrangement. 


4. Procedure according to any of Claims 1 through 3, wherein the generation of the 
superimposition of an optical image with the data record is performed on a monitor (13), 
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wherein the optical image is taken by a video camera (1), which is securely connected with a 
3D sensor (1 1) to determine the spatial position. 


5. Procedure according to any of Claims 1 through 3, wherein the generation of a 
superimposition of the optical image with the data record takes place through the interposition 
of a display of the data record between the eye of the observer (20) and the jaw to be displayed 
(1,2) or the model of the jaw ( 1 , 2). 


6. Procedure according to Claim 5, wherein the display takes the form of a transparent LCD 
display (23). 


7. Procedure according to Claim 5 or 6, wherein the display takes the form of eye glasses, a 
screen arranged between observer and jaw (1, 2) or model, preferentially with a 3D sensor, < 
the display is performed by reflecting the data record into the eye of the observer (20). 


8. Procedure according to any of Claims 1 through 7, wherein the user inserts 
three-dimensional structures in the image data record and these are displayed in a correct 
positional arrangement to the optical image. 


9. Procedure for the display of a person's jaw and/or a model thereof, consisting of the 
following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
optically visible marking points (4); 

- Talcing at least one image of the person's jaw (1, 2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- As appropriate, producing an impression of the jaw (1 , 2) and generating a model (30) of the 
jaw (1,2); 

the following steps being performed for display purposes: 

- Placing an additional 3D sensor (6, 26) on the outside of the model of the jaw in question (1, 
2) or the model (30) of the jaw; 

- Re-introducing the position-determining device (3), if removed in the meanwhile, into the 
oral cavity or the model (30) in the same position as when taking the image in the imaging 
procedure; 

- Taking at least one photographic or video picture of the jaw (1 , 2) or the model (30); 

- Removing the position-determining device (3); 
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- Taking at least one more photographic or video picture of the jaw (1. 2) or the model (30) 
from the same position; 

- Storing the photographic or video pictures as a data record; 

- Producing a correspondence between the marking points on the picture of the imaging 
procedure. and the optical display; 

- Generating a superimposition of an optical image of the jaw (1 , 2) with the data record in a 
correct positional arrangement, or alternatively generating a superimposition of an optical 
image of the jaw (1 ,2) or the model (30) with the data record in a correct positional 
arrangement. 


10. Position-determining device which can be used for a procedure according to any of Claims 
1 through 8, wherein the device (3) can be inserted in a person ! s oral cavity and is designed so 
that it can be maintained in an unambiguously reproducible position by the person's upper jaw 
(2) and lower jaw (1), wherein the device (3) has marking points (4) which can be identified 
with an imaging procedure, and that it furthermore has a position sensor (5), which makes 
possible precise determination of the spatial position of the device (3). 


1 1 . Device according to Claim 10, characterized by its consisting of a fixed basic unit which 
has the marking points (4) and the position sensor, this basic unit having retainers consisting 
of a flexible material, capable of hardening, which fits the shape of teeth or the jaw (1, 2). 


12. Position-determining device which can be used for a procedure according to Claim 9, 
wherein the device (3) can be inserted in a person's oral cavity and is designed so that it can be 
held between the person's upper jaw (2) and lower jaw (1) in an unambiguously reproducible 
position, characterized by the fact that the device (3) has marking points (4) which can be 
identified with an imaging procedure and are also optically visible. 
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